BIO到NIO源码的一些事儿之NIO 中

前言

此系列文章会详细解读NIO的功能逐步丰满的路程,为Reactor-Netty 库的讲解铺平道路。

关于Java编程方法论-Reactor与Webflux的视频分享,已经完成了Rxjava 与 Reactor,b站地址如下:

Rxjava源码解读与分享:https://www.bilibili.com/video/av34537840

Reactor源码解读与分享:https://www.bilibili.com/video/av35326911

本系列源码解读基于JDK11 api细节可能与其他版本有所差别,请自行解决jdk版本问题。

Channel解读

接上一篇BIO到NIO源码的一些事儿之NIO 上

赋予Channel支持网络socket的能力

我们最初的目的就是为了增强Socket,基于这个基本需求,没有条件创造条件,于是为了让Channel拥有网络socket的能力,这里定义了一个java.nio.channels.NetworkChannel接口。花不多说,我们来看这个接口的定义:

1
2
3
4
5
6
7
8
9
10
11
12
public interface NetworkChannel extends Channel
{
NetworkChannel bind(SocketAddress local) throws IOException;

SocketAddress getLocalAddress() throws IOException;

<T> NetworkChannel setOption(SocketOption<T> name, T value) throws IOException;

<T> T getOption(SocketOption<T> name) throws IOException;

Set<SocketOption<?>> supportedOptions();
}

通过bind(SocketAddress) 方法将socket绑定到本地 SocketAddress上,通过getLocalAddress()方法返回socket绑定的地址,
通过 setOption(SocketOption,Object)getOption(SocketOption)方法设置和查询socket支持的配置选项。

bind

接下来我们来看 java.nio.channels.ServerSocketChannel抽象类及其实现类sun.nio.ch.ServerSocketChannelImpl对之实现的细节。
首先我们来看其对于bind的实现:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
//sun.nio.ch.ServerSocketChannelImpl#bind
@Override
public ServerSocketChannel bind(SocketAddress local, int backlog) throws IOException {
synchronized (stateLock) {
ensureOpen();
//通过localAddress判断是否已经调用过bind
if (localAddress != null)
throw new AlreadyBoundException();
//InetSocketAddress(0)表示绑定到本机的所有地址,由操作系统选择合适的端口
InetSocketAddress isa = (local == null)
? new InetSocketAddress(0)
: Net.checkAddress(local);
SecurityManager sm = System.getSecurityManager();
if (sm != null)
sm.checkListen(isa.getPort());
NetHooks.beforeTcpBind(fd, isa.getAddress(), isa.getPort());
Net.bind(fd, isa.getAddress(), isa.getPort());
//开启监听,s如果参数backlog小于1,默认接受50个连接
Net.listen(fd, backlog < 1 ? 50 : backlog);
localAddress = Net.localAddress(fd);
}
return this;
}

下面我们来看看Net中的bind和listen方法是如何实现的。

Net.bind
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
//sun.nio.ch.Net#bind(java.io.FileDescriptor, java.net.InetAddress, int)
public static void bind(FileDescriptor fd, InetAddress addr, int port)
throws IOException
{
bind(UNSPEC, fd, addr, port);
}

static void bind(ProtocolFamily family, FileDescriptor fd,
InetAddress addr, int port) throws IOException
{
//如果传入的协议域不是IPV4而且支持IPV6,则使用ipv6
boolean preferIPv6 = isIPv6Available() &&
(family != StandardProtocolFamily.INET);
bind0(fd, preferIPv6, exclusiveBind, addr, port);
}

private static native void bind0(FileDescriptor fd, boolean preferIPv6,
boolean useExclBind, InetAddress addr,
int port)
throws IOException;

bind0为native方法实现:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
JNIEXPORT void JNICALL
Java_sun_nio_ch_Net_bind0(JNIEnv *env, jclass clazz, jobject fdo, jboolean preferIPv6,
jboolean useExclBind, jobject iao, int port)
{
SOCKETADDRESS sa;
int sa_len = 0;
int rv = 0;
//将java的InetAddress转换为c的struct sockaddr
if (NET_InetAddressToSockaddr(env, iao, port, &sa, &sa_len,
preferIPv6) != 0) {
return;//转换失败,方法返回
}
//调用bind方法:int bind(int sockfd, struct sockaddr* addr, socklen_t addrlen)
rv = NET_Bind(fdval(env, fdo), &sa, sa_len);
if (rv != 0) {
handleSocketError(env, errno);
}
}

socket是用户程序与内核交互信息的枢纽,它自身没有网络协议地址和端口号等信息,在进行网络通信的时候,必须把一个socket与一个地址相关联。
很多时候内核会我们自动绑定一个地址,然而有时用户可能需要自己来完成这个绑定的过程,以满足实际应用的需要;
最典型的情况是一个服务器进程需要绑定一个众所周知的地址或端口以等待客户来连接。
对于客户端,很多时候并不需要调用bind方法,而是由内核自动绑定;

这里要注意,绑定归绑定,在有连接过来的时候会创建一个新的Socket,然后服务端操作这个新的Socket即可。这里就可以关注accept方法了。由sun.nio.ch.ServerSocketChannelImpl#bind最后,我们知道其通过Net.listen(fd, backlog < 1 ? 50 : backlog)开启监听,如果参数backlog小于1,默认接受50个连接。由此,我们来关注下Net.listen方法细节。

Net.listen
1
2
//sun.nio.ch.Net#listen
static native void listen(FileDescriptor fd, int backlog) throws IOException;

可以知道,Net.listennative方法,源码如下:

1
2
3
4
5
6
JNIEXPORT void JNICALL
Java_sun_nio_ch_Net_listen(JNIEnv *env, jclass cl, jobject fdo, jint backlog)
{
if (listen(fdval(env, fdo), backlog) < 0)
handleSocketError(env, errno);
}

可以看到底层是调用listen实现的,listen函数在一般在调用bind之后到调用accept之前调用,它的函数原型是:
int listen(int sockfd, int backlog)返回值:0表示成功, -1表示失败

我们再来关注下bind操作中的其他细节,最开始时的ensureOpen()方法判断:

1
2
3
4
5
6
7
8
9
10
//sun.nio.ch.ServerSocketChannelImpl#ensureOpen
// @throws ClosedChannelException if channel is closed
private void ensureOpen() throws ClosedChannelException {
if (!isOpen())
throw new ClosedChannelException();
}
//java.nio.channels.spi.AbstractInterruptibleChannel#isOpen
public final boolean isOpen() {
return !closed;
}

如果socket关闭,则抛出ClosedChannelException

我们再来看下Net#checkAddress

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
//sun.nio.ch.Net#checkAddress(java.net.SocketAddress)
public static InetSocketAddress checkAddress(SocketAddress sa) {
if (sa == null)//地址为空
throw new NullPointerException();
//非InetSocketAddress类型地址
if (!(sa instanceof InetSocketAddress))
throw new UnsupportedAddressTypeException(); // ## needs arg
InetSocketAddress isa = (InetSocketAddress)sa;
//地址不可识别
if (isa.isUnresolved())
throw new UnresolvedAddressException(); // ## needs arg
InetAddress addr = isa.getAddress();
//非ip4和ip6地址
if (!(addr instanceof Inet4Address || addr instanceof Inet6Address))
throw new IllegalArgumentException("Invalid address type");
return isa;
}

从上面可以看出,bind首先检查ServerSocket是否关闭,是否绑定地址, 如果既没有绑定也没关闭,则检查绑定的socketaddress是否正确或合法; 然后通过Net工具类的bindlisten,完成实际的ServerSocket地址绑定和开启监听,如果绑定是开启的参数小于1,则默认接受50个连接。

对照我们之前在第一篇中接触的BIO,我们来看些accept()方法的实现:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
//sun.nio.ch.ServerSocketChannelImpl#accept()
@Override
public SocketChannel accept() throws IOException {
acceptLock.lock();
try {
int n = 0;
FileDescriptor newfd = new FileDescriptor();
InetSocketAddress[] isaa = new InetSocketAddress[1];

boolean blocking = isBlocking();
try {
begin(blocking);
do {
n = accept(this.fd, newfd, isaa);
} while (n == IOStatus.INTERRUPTED && isOpen());
} finally {
end(blocking, n > 0);
assert IOStatus.check(n);
}

if (n < 1)
return null;
//针对接受连接的处理通道socketchannelimpl,默认为阻塞模式
// newly accepted socket is initially in blocking mode
IOUtil.configureBlocking(newfd, true);

InetSocketAddress isa = isaa[0];
//构建SocketChannelImpl,这个具体在SocketChannelImpl再说
SocketChannel sc = new SocketChannelImpl(provider(), newfd, isa);

// check permitted to accept connections from the remote address
SecurityManager sm = System.getSecurityManager();
if (sm != null) {
try {
//检查地址和port权限
sm.checkAccept(isa.getAddress().getHostAddress(), isa.getPort());
} catch (SecurityException x) {
sc.close();
throw x;
}
}
//返回socketchannelimpl
return sc;

} finally {
acceptLock.unlock();
}
}

对于accept(this.fd, newfd, isaa),调用accept接收socket中已建立的连接,我们之前有在BIO中了解过,函数最终会调用:int accept(int sockfd,struct sockaddr addr, socklen_t addrlen);

  • 如果fd监听socket的队列中没有等待的连接,socket也没有被标记为Non-blocking,accept()会阻塞直到连接出现;
  • 如果socket被标记为Non-blocking,队列中也没有等待的连接,accept()返回错误EAGAIN或EWOULDBLOCK

这里begin(blocking);end(blocking, n > 0);的合作模式我们在InterruptibleChannel 与可中断 IO这一篇文章中已经涉及过,这里再次提一下,让大家看到其应用,此处专注的是等待连接这个过程,期间可以出现异常打断,这个过程正常结束的话,就会正常往下执行逻辑,不要搞的好像这个Channel要结束了一样,end(blocking, n > 0)的第二个参数completed也只是在判断这个等待过程是否结束而已,不要功能范围扩大化。

supportedOptions

我们再来看下NetworkChannel的其他方法实现,首先来看supportedOptions

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
//sun.nio.ch.ServerSocketChannelImpl#supportedOptions
@Override
public final Set<SocketOption<?>> supportedOptions() {
return DefaultOptionsHolder.defaultOptions;
}
//sun.nio.ch.ServerSocketChannelImpl.DefaultOptionsHolder
private static class DefaultOptionsHolder {
static final Set<SocketOption<?>> defaultOptions = defaultOptions();

private static Set<SocketOption<?>> defaultOptions() {
HashSet<SocketOption<?>> set = new HashSet<>();
set.add(StandardSocketOptions.SO_RCVBUF);
set.add(StandardSocketOptions.SO_REUSEADDR);
if (Net.isReusePortAvailable()) {
set.add(StandardSocketOptions.SO_REUSEPORT);
}
set.add(StandardSocketOptions.IP_TOS);
set.addAll(ExtendedSocketOptions.options(SOCK_STREAM));
//返回不可修改的HashSet
return Collections.unmodifiableSet(set);
}
}

对上述配置中的一些配置我们大致来瞅眼:

1
2
3
4
5
6
7
8
9
10
11
12
13
//java.net.StandardSocketOptions
//socket接受缓存大小
public static final SocketOption<Integer> SO_RCVBUF =
new StdSocketOption<Integer>("SO_RCVBUF", Integer.class);
//是否可重用地址
public static final SocketOption<Boolean> SO_REUSEADDR =
new StdSocketOption<Boolean>("SO_REUSEADDR", Boolean.class);
//是否可重用port
public static final SocketOption<Boolean> SO_REUSEPORT =
new StdSocketOption<Boolean>("SO_REUSEPORT", Boolean.class);
//Internet协议(IP)标头(header)中的服务类型(ToS)。
public static final SocketOption<Integer> IP_TOS =
new StdSocketOption<Integer>("IP_TOS", Integer.class);

setOption实现

知道了上面的支持配置,我们来看下setOption实现细节:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
//sun.nio.ch.ServerSocketChannelImpl#setOption
@Override
public <T> ServerSocketChannel setOption(SocketOption<T> name, T value)
throws IOException
{
Objects.requireNonNull(name);
if (!supportedOptions().contains(name))
throw new UnsupportedOperationException("'" + name + "' not supported");
synchronized (stateLock) {
ensureOpen();

if (name == StandardSocketOptions.IP_TOS) {
ProtocolFamily family = Net.isIPv6Available() ?
StandardProtocolFamily.INET6 : StandardProtocolFamily.INET;
Net.setSocketOption(fd, family, name, value);
return this;
}

if (name == StandardSocketOptions.SO_REUSEADDR && Net.useExclusiveBind()) {
// SO_REUSEADDR emulated when using exclusive bind
isReuseAddress = (Boolean)value;
} else {
// no options that require special handling
Net.setSocketOption(fd, Net.UNSPEC, name, value);
}
return this;
}
}

这里,大家就能看到supportedOptions().contains(name)的作用了,首先会进行支持配置的判断,然后进行正常的设置逻辑。里面对于Socket配置设定主要执行了Net.setSocketOption,这里,就只对其代码做中文注释就好,整个逻辑过程没有太复杂的。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
static void setSocketOption(FileDescriptor fd, ProtocolFamily family,
SocketOption<?> name, Object value)
throws IOException
{
if (value == null)
throw new IllegalArgumentException("Invalid option value");

// only simple values supported by this method
Class<?> type = name.type();

if (extendedOptions.isOptionSupported(name)) {
extendedOptions.setOption(fd, name, value);
return;
}
//非整形和布尔型,则抛出断言错误
if (type != Integer.class && type != Boolean.class)
throw new AssertionError("Should not reach here");

// special handling
if (name == StandardSocketOptions.SO_RCVBUF ||
name == StandardSocketOptions.SO_SNDBUF)
{
//判断接受和发送缓冲区大小
int i = ((Integer)value).intValue();
if (i < 0)
throw new IllegalArgumentException("Invalid send/receive buffer size");
}
//缓冲区有数据,延迟关闭socket的的时间
if (name == StandardSocketOptions.SO_LINGER) {
int i = ((Integer)value).intValue();
if (i < 0)
value = Integer.valueOf(-1);
if (i > 65535)
value = Integer.valueOf(65535);
}
//UDP单播
if (name == StandardSocketOptions.IP_TOS) {
int i = ((Integer)value).intValue();
if (i < 0 || i > 255)
throw new IllegalArgumentException("Invalid IP_TOS value");
}
//UDP多播
if (name == StandardSocketOptions.IP_MULTICAST_TTL) {
int i = ((Integer)value).intValue();
if (i < 0 || i > 255)
throw new IllegalArgumentException("Invalid TTL/hop value");
}

// map option name to platform level/name
OptionKey key = SocketOptionRegistry.findOption(name, family);
if (key == null)
throw new AssertionError("Option not found");

int arg;
//转换配置参数值
if (type == Integer.class) {
arg = ((Integer)value).intValue();
} else {
boolean b = ((Boolean)value).booleanValue();
arg = (b) ? 1 : 0;
}

boolean mayNeedConversion = (family == UNSPEC);
boolean isIPv6 = (family == StandardProtocolFamily.INET6);
//设置文件描述符的值及其他
setIntOption0(fd, mayNeedConversion, key.level(), key.name(), arg, isIPv6);
}

getOption

接下来,我们来看getOption实现,源码如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
//sun.nio.ch.ServerSocketChannelImpl#getOption
@Override
@SuppressWarnings("unchecked")
public <T> T getOption(SocketOption<T> name)
throws IOException
{
Objects.requireNonNull(name);
//非通道支持选项,则抛出UnsupportedOperationException
if (!supportedOptions().contains(name))
throw new UnsupportedOperationException("'" + name + "' not supported");

synchronized (stateLock) {
ensureOpen();
if (name == StandardSocketOptions.SO_REUSEADDR && Net.useExclusiveBind()) {
// SO_REUSEADDR emulated when using exclusive bind
return (T)Boolean.valueOf(isReuseAddress);
}
//假如获取的不是上面的配置,则委托给Net来处理
// no options that require special handling
return (T) Net.getSocketOption(fd, Net.UNSPEC, name);
}
}
//sun.nio.ch.Net#getSocketOption
static Object getSocketOption(FileDescriptor fd, ProtocolFamily family,
SocketOption<?> name)
throws IOException
{
Class<?> type = name.type();

if (extendedOptions.isOptionSupported(name)) {
return extendedOptions.getOption(fd, name);
}
//只支持整形和布尔型,否则抛出断言错误
// only simple values supported by this method
if (type != Integer.class && type != Boolean.class)
throw new AssertionError("Should not reach here");

// map option name to platform level/name
OptionKey key = SocketOptionRegistry.findOption(name, family);
if (key == null)
throw new AssertionError("Option not found");

boolean mayNeedConversion = (family == UNSPEC);
//获取文件描述的选项配置
int value = getIntOption0(fd, mayNeedConversion, key.level(), key.name());

if (type == Integer.class) {
return Integer.valueOf(value);
} else {
//我们要看到前面支持配置处的源码其支持的类型要么是Boolean,要么是Integer
//所以,返回值为Boolean.FALSE 或 Boolean.TRUE也就不足为奇了
return (value == 0) ? Boolean.FALSE : Boolean.TRUE;
}
}

ServerSocketChannel与ServerSocket在bind处的异同

Net.bind一节中,我们最后说了一个注意点,每个连接过来的时候都会创建一个Socket来供此连接进行操作,这个在accept方法中可以看到,其在得到连接之后,就 new SocketChannelImpl(provider(), newfd, isa)这个对象。那这里,就引出一个话题,我们在使用bind方法的时候,是不是也应该绑定到一个Socket之上呢,那之前bio是怎么做呢,我们先来回顾一下。
我们之前在调用java.net.ServerSocket#ServerSocket(int, int, java.net.InetAddress)方法的时候,里面有一个setImpl():

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
//java.net.ServerSocket
public ServerSocket(int port, int backlog, InetAddress bindAddr) throws IOException {
setImpl();
if (port < 0 || port > 0xFFFF)
throw new IllegalArgumentException(
"Port value out of range: " + port);
if (backlog < 1)
backlog = 50;
try {
bind(new InetSocketAddress(bindAddr, port), backlog);
} catch(SecurityException e) {
close();
throw e;
} catch(IOException e) {
close();
throw e;
}
}
//java.net.ServerSocket#setImpl
private void setImpl() {
if (factory != null) {
impl = factory.createSocketImpl();
checkOldImpl();
} else {
// No need to do a checkOldImpl() here, we know it's an up to date
// SocketImpl!
impl = new SocksSocketImpl();
}
if (impl != null)
impl.setServerSocket(this);
}

但是,我们此处的重点在bind(new InetSocketAddress(bindAddr, port), backlog);,这里的代码如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
//java.net.ServerSocket
public void bind(SocketAddress endpoint, int backlog) throws IOException {
if (isClosed())
throw new SocketException("Socket is closed");
if (!oldImpl && isBound())
throw new SocketException("Already bound");
if (endpoint == null)
endpoint = new InetSocketAddress(0);
if (!(endpoint instanceof InetSocketAddress))
throw new IllegalArgumentException("Unsupported address type");
InetSocketAddress epoint = (InetSocketAddress) endpoint;
if (epoint.isUnresolved())
throw new SocketException("Unresolved address");
if (backlog < 1)
backlog = 50;
try {
SecurityManager security = System.getSecurityManager();
if (security != null)
security.checkListen(epoint.getPort());
//重点!!
getImpl().bind(epoint.getAddress(), epoint.getPort());
getImpl().listen(backlog);
bound = true;
} catch(SecurityException e) {
bound = false;
throw e;
} catch(IOException e) {
bound = false;
throw e;
}
}

我们有看到 getImpl()我标示了重点,这里面做了什么,我们走进去:

1
2
3
4
5
6
//java.net.ServerSocket#getImpl
SocketImpl getImpl() throws SocketException {
if (!created)
createImpl();
return impl;
}

在整个过程中created还是对象刚创建时的初始值,为false,那么,铁定会进入createImpl()方法中:

1
2
3
4
5
6
7
8
9
10
11
//java.net.ServerSocket#createImpl
void createImpl() throws SocketException {
if (impl == null)
setImpl();
try {
impl.create(true);
created = true;
} catch (IOException e) {
throw new SocketException(e.getMessage());
}
}

而此处,因为前面impl已经赋值,所以,会走impl.create(true),进而将created设定为true。而此刻,终于到我想讲的重点了:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
//java.net.AbstractPlainSocketImpl#create
protected synchronized void create(boolean stream) throws IOException {
this.stream = stream;
if (!stream) {
ResourceManager.beforeUdpCreate();
// only create the fd after we know we will be able to create the socket
fd = new FileDescriptor();
try {
socketCreate(false);
SocketCleanable.register(fd);
} catch (IOException ioe) {
ResourceManager.afterUdpClose();
fd = null;
throw ioe;
}
} else {
fd = new FileDescriptor();
socketCreate(true);
SocketCleanable.register(fd);
}
if (socket != null)
socket.setCreated();
if (serverSocket != null)
serverSocket.setCreated();
}

可以看到,socketCreate(true);,它的实现如下:

1
2
3
4
5
6
7
8
9
@Override
void socketCreate(boolean stream) throws IOException {
if (fd == null)
throw new SocketException("Socket closed");

int newfd = socket0(stream);

fdAccess.set(fd, newfd);
}

通过本地方法socket0(stream)得到了一个文件描述符,由此,Socket创建了出来,然后进行相应的绑定。
我们再把眼光放回到sun.nio.ch.ServerSocketChannelImpl#accept()中,这里new的SocketChannelImpl对象是得到连接之后做的事情,那对于服务器来讲,绑定时候用的Socket呢,这里,我们在使用ServerSocketChannel的时候,往往要使用JDK给我们提供的对我统一的方法open,也是为了降低我们使用的复杂度,这里是java.nio.channels.ServerSocketChannel#open:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
//java.nio.channels.ServerSocketChannel#open
public static ServerSocketChannel open() throws IOException {
return SelectorProvider.provider().openServerSocketChannel();
}
//sun.nio.ch.SelectorProviderImpl#openServerSocketChannel
public ServerSocketChannel openServerSocketChannel() throws IOException {
return new ServerSocketChannelImpl(this);
}
//sun.nio.ch.ServerSocketChannelImpl#ServerSocketChannelImpl(SelectorProvider)
ServerSocketChannelImpl(SelectorProvider sp) throws IOException {
super(sp);
this.fd = Net.serverSocket(true);
this.fdVal = IOUtil.fdVal(fd);
}
//sun.nio.ch.Net#serverSocket
static FileDescriptor serverSocket(boolean stream) {
return IOUtil.newFD(socket0(isIPv6Available(), stream, true, fastLoopback));
}

可以看到,只要new了一个ServerSocketChannelImpl对象,就相当于拿到了一个socket然后bind也就有着落了。但是,我们要注意下细节ServerSocketChannel#open得到的是ServerSocketChannel类型。我们accept到一个客户端来的连接后,应该在客户端与服务器之间创建一个Socket通道来供两者通信操作的,所以,sun.nio.ch.ServerSocketChannelImpl#accept()中所做的是SocketChannel sc = new SocketChannelImpl(provider(), newfd, isa);,得到的是SocketChannel类型的对象,这样,就可以将Socket的读写数据的方法定义在这个类里面。

由ServerSocketChannel的socket方法延伸的

关于ServerSocketChannel,我们还有方法需要接触一下,如socket():

1
2
3
4
5
6
7
8
9
//sun.nio.ch.ServerSocketChannelImpl#socket
@Override
public ServerSocket socket() {
synchronized (stateLock) {
if (socket == null)
socket = ServerSocketAdaptor.create(this);
return socket;
}
}

我们看到了ServerSocketAdaptor,我们通过此类的注释可知,这是一个和ServerSocket调用一样,但是底层是用ServerSocketChannelImpl来实现的一个类,其适配是的目的是适配我们使用ServerSocket的方式,所以该ServerSocketAdaptor继承ServerSocket并按顺序重写了它的方法,所以,我们在写这块儿代码的时候也就有了新的选择。

InterruptibleChannel 与可中断 IO这一篇文章中已经涉及过java.nio.channels.spi.AbstractInterruptibleChannel#close的实现,这里,我们再来回顾下其中的某些细节,顺带引出我们新的话题:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
//java.nio.channels.spi.AbstractInterruptibleChannel#close
public final void close() throws IOException {
synchronized (closeLock) {
if (closed)
return;
closed = true;
implCloseChannel();
}
}
//java.nio.channels.spi.AbstractSelectableChannel#implCloseChannel
protected final void implCloseChannel() throws IOException {
implCloseSelectableChannel();

// clone keys to avoid calling cancel when holding keyLock
SelectionKey[] copyOfKeys = null;
synchronized (keyLock) {
if (keys != null) {
copyOfKeys = keys.clone();
}
}

if (copyOfKeys != null) {
for (SelectionKey k : copyOfKeys) {
if (k != null) {
k.cancel(); // invalidate and adds key to cancelledKey set
}
}
}
}
//sun.nio.ch.ServerSocketChannelImpl#implCloseSelectableChannel
@Override
protected void implCloseSelectableChannel() throws IOException {
assert !isOpen();

boolean interrupted = false;
boolean blocking;

// set state to ST_CLOSING
synchronized (stateLock) {
assert state < ST_CLOSING;
state = ST_CLOSING;
blocking = isBlocking();
}

// wait for any outstanding accept to complete
if (blocking) {
synchronized (stateLock) {
assert state == ST_CLOSING;
long th = thread;
if (th != 0) {
//本地线程不为null,则本地Socket预先关闭
//并通知线程通知关闭
nd.preClose(fd);
NativeThread.signal(th);

// wait for accept operation to end
while (thread != 0) {
try {
stateLock.wait();
} catch (InterruptedException e) {
interrupted = true;
}
}
}
}
} else {
// non-blocking mode: wait for accept to complete
acceptLock.lock();
acceptLock.unlock();
}

// set state to ST_KILLPENDING
synchronized (stateLock) {
assert state == ST_CLOSING;
state = ST_KILLPENDING;
}

// close socket if not registered with Selector
//如果未在Selector上注册,直接kill掉
//即关闭文件描述
if (!isRegistered())
kill();

// restore interrupt status
//印证了我们上一篇中在异步打断中若是通过线程的中断方法中断线程的话
//最后要设定该线程状态是interrupt
if (interrupted)
Thread.currentThread().interrupt();
}

@Override
public void kill() throws IOException {
synchronized (stateLock) {
if (state == ST_KILLPENDING) {
state = ST_KILLED;
nd.close(fd);
}
}
}

channel的close()应用

也是因为close()并没有在InterruptibleChannel 与可中断 IO这一篇文章中进行具体的讲解应用,这里其应用的更多是在SocketChannel这里,其更多的涉及到客户端与服务端建立连接交换数据,所以断开连接后,将不用的Channel关闭是很正常的。
这里,在sun.nio.ch.ServerSocketChannelImpl#accept()中的源码中:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
@Override
public SocketChannel accept() throws IOException {
...
// newly accepted socket is initially in blocking mode
IOUtil.configureBlocking(newfd, true);

InetSocketAddress isa = isaa[0];
SocketChannel sc = new SocketChannelImpl(provider(), newfd, isa);

// check permitted to accept connections from the remote address
SecurityManager sm = System.getSecurityManager();
if (sm != null) {
try {
sm.checkAccept(isa.getAddress().getHostAddress(), isa.getPort());
} catch (SecurityException x) {
sc.close();
throw x;
}
}
return sc;

} finally {
acceptLock.unlock();
}
}

这里通过对所接收的连接的远程地址做合法性判断,假如验证出现异常,则关闭上面创建的SocketChannel
还有一个关于close()的实际用法,在客户端建立连接的时候,如果连接出异常,同样是要关闭所创建的Socket:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
//java.nio.channels.SocketChannel#open(java.net.SocketAddress)
public static SocketChannel open(SocketAddress remote)
throws IOException
{
SocketChannel sc = open();
try {
sc.connect(remote);
} catch (Throwable x) {
try {
sc.close();
} catch (Throwable suppressed) {
x.addSuppressed(suppressed);
}
throw x;
}
assert sc.isConnected();
return sc;
}

接着,我们在implCloseSelectableChannel中会发现nd.preClose(fd);nd.close(fd);,这个在SocketChannelImplServerSocketChannelImpl两者对于implCloseSelectableChannel实现中都可以看到,这个nd是什么,这里,我们拿ServerSocketChannelImpl来讲,在这个类的最后面有一段静态代码块(SocketChannelImpl同理),也就是在这个类加载的时候就会执行:

1
2
3
4
5
6
7
//C:/Program Files/Java/jdk-11.0.1/lib/src.zip!/java.base/sun/nio/ch/ServerSocketChannelImpl.java:550
static {
//加载nio,net资源库
IOUtil.load();
initIDs();
nd = new SocketDispatcher();
}

也就是说,在ServerSocketChannelImpl这个类字节码加载的时候,就会创建SocketDispatcher对象。通过SocketDispatcher允许在不同的平台调用不同的本地方法进行读写操作,然后基于这个类,我们就可以在sun.nio.ch.SocketChannelImpl做Socket的I/O操作。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
//sun.nio.ch.SocketDispatcher
class SocketDispatcher extends NativeDispatcher
{

static {
IOUtil.load();
}
//读操作
int read(FileDescriptor fd, long address, int len) throws IOException {
return read0(fd, address, len);
}

long readv(FileDescriptor fd, long address, int len) throws IOException {
return readv0(fd, address, len);
}
//写操作
int write(FileDescriptor fd, long address, int len) throws IOException {
return write0(fd, address, len);
}

long writev(FileDescriptor fd, long address, int len) throws IOException {
return writev0(fd, address, len);
}
//预关闭文件描述符
void preClose(FileDescriptor fd) throws IOException {
preClose0(fd);
}
//关闭文件描述
void close(FileDescriptor fd) throws IOException {
close0(fd);
}

//-- Native methods
static native int read0(FileDescriptor fd, long address, int len)
throws IOException;

static native long readv0(FileDescriptor fd, long address, int len)
throws IOException;

static native int write0(FileDescriptor fd, long address, int len)
throws IOException;

static native long writev0(FileDescriptor fd, long address, int len)
throws IOException;

static native void preClose0(FileDescriptor fd) throws IOException;

static native void close0(FileDescriptor fd) throws IOException;
}

FileDescriptor

我们有看到FileDescriptor在前面代码中有大量的出现,这里,我们对它来专门介绍。通过FileDescriptor 这个类的实例来充当底层机器特定结构的不透明处理,表示打开文件,打开socket或其他字节源或接收器。
文件描述符的主要用途是创建一个 FileInputStream或 FileOutputStream来包含它。
注意: 应用程序不应创建自己的文件描述符。
我们来看其部分源码:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
public final class FileDescriptor {

private int fd;

private long handle;

private Closeable parent;
private List<Closeable> otherParents;
private boolean closed;

/**
* true, if file is opened for appending.
*/
private boolean append;

static {
initIDs();
}
/**
* 在未明确关闭FileDescriptor的情况下进行清理.
*/
private PhantomCleanable<FileDescriptor> cleanup;

/**
* 构造一个无效的FileDescriptor对象,fd或handle会在之后进行设定
*/
public FileDescriptor() {
fd = -1;
handle = -1;
}

/**
* Used for standard input, output, and error only.
* For Windows the corresponding handle is initialized.
* For Unix the append mode is cached.
* 仅用于标准输入,输出和错误。
    * 对于Windows,初始化相应的句柄。
    * 对于Unix,缓存附加模式。
* @param fd the raw fd number (0, 1, 2)
*/
private FileDescriptor(int fd) {
this.fd = fd;
this.handle = getHandle(fd);
this.append = getAppend(fd);
}
...
}

我们平时所用的标准输入,输出,错误流的句柄可以如下,通常,我们不会直接使用它们,而是使用java.lang.System.injava.lang.System#outjava.lang.System#err:

1
2
3
public static final FileDescriptor in = new FileDescriptor(0);
public static final FileDescriptor out = new FileDescriptor(1);
public static final FileDescriptor err = new FileDescriptor(2);

测试该文件描述符是否有效可以使用如下方法:

1
2
3
4
//java.io.FileDescriptor#valid
public boolean valid() {
return (handle != -1) || (fd != -1);
}

返回值为true的话,那么这个文件描述符对象所代表的socket 文件操作或其他活动的网络连接都是有效的,反之,false则是无效。
更多内容,读者可以自行深入源码,此处就不过多解释了。为了让大家可以更好的理解上述内容,我们会在后面的部分还要进一步涉及一下。

NIO包下SocketChannel解读

在前面,我们已经接触了SocketChannel,这里,来接触下细节。

同样,我们也可以通过调用此类的open方法来创建socket channel。这里需要注意:

  • 无法为任意预先存在的socket创建channel
  • 新创建的socket channel已打开但尚未连接。
  • 尝试在未连接的channel上调用I/O操作将导致抛出NotYetConnectedException
  • 可以通过调用connect方法连接socket channel;
  • 一旦连接后,socket channel会保持连接状态,直到它关闭。
  • 是否有连接socket channel可以通过确定调用其isConnected方法。

socket channel支持 非阻塞连接:

  • 可以先创建socket channel,然后可以通过 connect 方法建立到远程socket的连接。
  • 通过调用finishConnect方法来结束连接。
  • 判断是否正在进行连接操作可以通过调用isConnectionPending方法来确定。

socket channel支持异步关闭,类似于Channel类中的异步关闭操作。

  • 如果socket的输入端被一个线程关闭而另一个线程在此socket channel上因在进行读操作而被阻塞,那么被阻塞线程中的读操作将不读取任何字节并将返回 -1
  • 如果socket的输出端被一个线程关闭而另一个线程在socket channel上因在进行写操作而被阻塞,则被阻塞的线程将收到AsynchronousCloseException

接下来,我们来看其具体实现方法。

ServerSocketChannel与SocketChannel的open()

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
//java.nio.channels.SocketChannel#open()
public static SocketChannel open() throws IOException {
return SelectorProvider.provider().openSocketChannel();
}
//java.nio.channels.SocketChannel#open(java.net.SocketAddress)
//这个方法省的我们再次调用connect了
public static SocketChannel open(SocketAddress remote)
throws IOException
{
//默认是堵塞的,这个在AbstractSelectableChannel处讨论过了
SocketChannel sc = open();
try {
sc.connect(remote);
} catch (Throwable x) {
try {
sc.close();
} catch (Throwable suppressed) {
x.addSuppressed(suppressed);
}
throw x;
}
assert sc.isConnected();
return sc;
}
//sun.nio.ch.SelectorProviderImpl#openSocketChannel
public SocketChannel openSocketChannel() throws IOException {
return new SocketChannelImpl(this);
}
//sun.nio.ch.SocketChannelImpl#SocketChannelImpl(java.nio.channels.spi.SelectorProvider)
SocketChannelImpl(SelectorProvider sp) throws IOException {
super(sp);
//调用socket函数,true表示TCP
this.fd = Net.socket(true);
this.fdVal = IOUtil.fdVal(fd);
}
//sun.nio.ch.Net#socket(boolean)
static FileDescriptor socket(boolean stream) throws IOException {
return socket(UNSPEC, stream);
}
//sun.nio.ch.Net#socket(java.net.ProtocolFamily, boolean)
static FileDescriptor socket(ProtocolFamily family, boolean stream)
throws IOException {
boolean preferIPv6 = isIPv6Available() &&
(family != StandardProtocolFamily.INET);
return IOUtil.newFD(socket0(preferIPv6, stream, false, fastLoopback));
}
//sun.nio.ch.IOUtil#newFD
public static FileDescriptor newFD(int i) {
FileDescriptor fd = new FileDescriptor();
setfdVal(fd, i);
return fd;
}
static native void setfdVal(FileDescriptor fd, int value);

关于Net.socket(true),我们前面已经提到过了,这里,通过其底层源码来再次调教下 (此处不想看可以跳过):

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
JNIEXPORT jint JNICALL
Java_sun_nio_ch_Net_socket0(JNIEnv *env, jclass cl, jboolean preferIPv6,
jboolean stream, jboolean reuse, jboolean ignored)
{
int fd;
//字节流还是数据报,TCP对应SOCK_STREAM,UDP对应SOCK_DGRAM,此处传入的stream=true;
int type = (stream ? SOCK_STREAM : SOCK_DGRAM);
//判断是IPV6还是IPV4
int domain = (ipv6_available() && preferIPv6) ? AF_INET6 : AF_INET;

//调用Linux的socket函数,domain为代表协议;
//type为套接字类型,protocol设置为0来表示使用默认的传输协议
fd = socket(domain, type, 0);
//出错
if (fd < 0) {
return handleSocketError(env, errno);
}

/* Disable IPV6_V6ONLY to ensure dual-socket support */
if (domain == AF_INET6) {
int arg = 0;
//arg=1设置ipv6的socket只接收ipv6地址的报文,arg=0表示也可接受ipv4的请求
if (setsockopt(fd, IPPROTO_IPV6, IPV6_V6ONLY, (char*)&arg,
sizeof(int)) < 0) {
JNU_ThrowByNameWithLastError(env,
JNU_JAVANETPKG "SocketException",
"Unable to set IPV6_V6ONLY");
close(fd);
return -1;
}
}

//SO_REUSEADDR有四种用途:
//1.当有一个有相同本地地址和端口的socket1处于TIME_WAIT状态时,而你启动的程序的socket2要占用该地址和端口,你的程序就要用到该选项。
//2.SO_REUSEADDR允许同一port上启动同一服务器的多个实例(多个进程)。但每个实例绑定的IP地址是不能相同的。
//3.SO_REUSEADDR允许单个进程绑定相同的端口到多个socket上,但每个socket绑定的ip地址不同。
//4.SO_REUSEADDR允许完全相同的地址和端口的重复绑定。但这只用于UDP的多播,不用于TCP;
if (reuse) {
int arg = 1;
if (setsockopt(fd, SOL_SOCKET, SO_REUSEADDR, (char*)&arg,
sizeof(arg)) < 0) {
JNU_ThrowByNameWithLastError(env,
JNU_JAVANETPKG "SocketException",
"Unable to set SO_REUSEADDR");
close(fd);
return -1;
}
}

#if defined(__linux__)
if (type == SOCK_DGRAM) {
int arg = 0;
int level = (domain == AF_INET6) ? IPPROTO_IPV6 : IPPROTO_IP;
if ((setsockopt(fd, level, IP_MULTICAST_ALL, (char*)&arg, sizeof(arg)) < 0) &&
(errno != ENOPROTOOPT)) {
JNU_ThrowByNameWithLastError(env,
JNU_JAVANETPKG "SocketException",
"Unable to set IP_MULTICAST_ALL");
close(fd);
return -1;
}
}

//IPV6_MULTICAST_HOPS用于控制多播的范围,
// 1表示只在本地网络转发,
//更多介绍请参考(http://www.ctt.sbras.ru/cgi-bin/www/unix_help/unix-man?ip6+4);
/* By default, Linux uses the route default */
if (domain == AF_INET6 && type == SOCK_DGRAM) {
int arg = 1;
if (setsockopt(fd, IPPROTO_IPV6, IPV6_MULTICAST_HOPS, &arg,
sizeof(arg)) < 0) {
JNU_ThrowByNameWithLastError(env,
JNU_JAVANETPKG "SocketException",
"Unable to set IPV6_MULTICAST_HOPS");
close(fd);
return -1;
}
}
#endif
return fd;
}

Linux 3.9之后加入了SO_REUSEPORT配置,这个配置很强大,多个socket(不管是处于监听还是非监听,不管是TCP还是UDP)只要在绑定之前设置了SO_REUSEPORT属性,那么就可以绑定到完全相同的地址和端口。
为了阻止”port 劫持”(Port hijacking)有一个特别的限制:所有希望共享源地址和端口的socket都必须拥有相同的有效用户id(effective user ID)。这样一个用户就不能从另一个用户那里”偷取”端口。另外,内核在处理SO_REUSEPORT socket的时候使用了其它系统上没有用到的”特殊技巧”:

  • 对于UDP socket,内核尝试平均的转发数据报;
  • 对于TCP监听socket,内核尝试将新的客户连接请求(由accept返回)平均的交给共享同一地址和端口的socket(服务器监听socket)。

例如:一个简单的服务器程序的多个实例可以使用SO_REUSEPORT socket,这样就实现一个简单的负载均衡,因为内核已经把请求的分配都做了。

在前面的代码中可以看到,在这个socket创建成功之后,调用IOUtil.newFD创建了文件描述符
。这里,我只是想知道这个Socket是可以输入呢,还是可以读呢,还是有错呢,参考FileDescriptor这一节最后那几个标准状态的设定,其实这里也是一样,因为我们要往Socket中写和读,其标准状态无非就这三种:输入,输出,出错。而这个Socket是绑定在SocketChannel上的,那就把FileDescriptor也绑定到上面即可,这样我们就可以获取到它的状态了。由于FileDescriptor没有提供外部设置fd的方法,setfdVal是通过本地方法实现的:

1
2
3
4
5
JNIEXPORT void JNICALL
Java_sun_nio_ch_IOUtil_setfdVal(JNIEnv *env, jclass clazz, jobject fdo, jint val)
{
(*env)->SetIntField(env, fdo, fd_fdID, val);
}

假如各位有对Linux下的shell编程或者命令有了解的话,我们知道,shell对报错进行重定向要使用2>,也就是将错误信息由2号所指向的通道写出,这里0和1 同样指向一个通道。此处同样也代表了状态,这样就可以对代表Socket的状态进行操作了,也就是改变SelectionKeyinterest ops,即首先对SelectionKey按输入输出类型进行分类,然后我们的读写状态的操作也就有着落了。此处我们打个戳,在下一篇中会对其进行细节讲解。

我们回归到SocketChannelopen方法中。我们可以看到,SelectorProvider.provider().openSocketChannel()返回的是SocketChannelImpl对象实例。在SocketChannelImpl(SelectorProvider sp)中我们并未看到其对this.state进行值操作,也就是其默认为0,即ST_UNCONNECTED(未连接状态),同时Socket默认是堵塞的。
所以,一般情况下,当采用异步方式时,使用不带参数的open方法比较常见,这样,我们会随之调用configureBlocking来设置非堵塞。

SocketChannel的connect解读

由前面可知,我们调用connect方法连接到远程服务器,其源码如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
//sun.nio.ch.SocketChannelImpl#connect
@Override
public boolean connect(SocketAddress sa) throws IOException {
InetSocketAddress isa = Net.checkAddress(sa);
SecurityManager sm = System.getSecurityManager();
if (sm != null)
sm.checkConnect(isa.getAddress().getHostAddress(), isa.getPort());

InetAddress ia = isa.getAddress();
if (ia.isAnyLocalAddress())
ia = InetAddress.getLocalHost();

try {
readLock.lock();
try {
writeLock.lock();
try {
int n = 0;
boolean blocking = isBlocking();
try {
//支持线程中断,通过设置当前线程的Interruptible blocker属性实现
beginConnect(blocking, isa);
do {
//调用connect函数实现,如果采用堵塞模式,会一直等待,直到成功或出//现异常
n = Net.connect(fd, ia, isa.getPort());
} while (n == IOStatus.INTERRUPTED && isOpen());
} finally {
endConnect(blocking, (n > 0));
}
assert IOStatus.check(n);
//连接成功
return n > 0;
} finally {
writeLock.unlock();
}
} finally {
readLock.unlock();
}
} catch (IOException ioe) {
// connect failed, close the channel
close();
throw SocketExceptions.of(ioe, isa);
}
}

关于beginConnectendConnect,是针对AbstractInterruptibleChannelbegin()end方法的一种增强。这里我们需要知道的是,假如是非阻塞Channel的话,我们无须去关心连接过程的打断。顾名思义,只有阻塞等待才需要去考虑打断这一场景的出现。剩下的细节我已经在代码中进行了完整的注释,读者可自行查看。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
//sun.nio.ch.SocketChannelImpl#beginConnect
private void beginConnect(boolean blocking, InetSocketAddress isa)
throws IOException
{ //只有阻塞的时候才会进入begin
if (blocking) {
// set hook for Thread.interrupt
//支持线程中断,通过设置当前线程的Interruptible blocker属性实现
begin();
}
synchronized (stateLock) {
//默认为open, 除非调用了close方法
ensureOpen();
//检查连接状态
int state = this.state;
if (state == ST_CONNECTED)
throw new AlreadyConnectedException();
if (state == ST_CONNECTIONPENDING)
throw new ConnectionPendingException();
//断言当前的状态是否是未连接状态,如果是,赋值表示正在连接中
assert state == ST_UNCONNECTED;
//表示正在连接中
this.state = ST_CONNECTIONPENDING;
//只有未绑定本地地址也就是说未调用bind方法才执行,
//该方法在ServerSocketChannel中也见过
if (localAddress == null)
NetHooks.beforeTcpConnect(fd, isa.getAddress(), isa.getPort());
remoteAddress = isa;

if (blocking) {
// record thread so it can be signalled if needed
readerThread = NativeThread.current();
}
}
}

在连接过程中,我们需要注意的就是几个连接的状态:ST_UNCONNECTEDST_CONNECTEDST_CONNECTIONPENDINGST_CLOSINGST_KILLPENDINGST_KILLED,也是因为其是一个公共状态,可能会有多个线程对其进行连接操作的。所以,state被定义为一个volatile变量,这个变量在改变的时候需要有stateLock这个对象来作为synchronized锁对象来控制同步操作的。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
//sun.nio.ch.SocketChannelImpl#endConnect
private void endConnect(boolean blocking, boolean completed)
throws IOException
{
endRead(blocking, completed);
//当上面代码中n>0,说明连接成功,更新状态为ST_CONNECTED
if (completed) {
synchronized (stateLock) {
if (state == ST_CONNECTIONPENDING) {
localAddress = Net.localAddress(fd);
state = ST_CONNECTED;
}
}
}
}
//sun.nio.ch.SocketChannelImpl#endRead
private void endRead(boolean blocking, boolean completed)
throws AsynchronousCloseException
{ //当阻塞状态下的话,才进入
if (blocking) {
synchronized (stateLock) {
readerThread = 0;
// notify any thread waiting in implCloseSelectableChannel
if (state == ST_CLOSING) {
stateLock.notifyAll();
}
}
//和begin成对出现,当线程中断时,抛出ClosedByInterruptException
// remove hook for Thread.interrupt
end(completed);
}
}

我们来关注connect中的Net.connect(fd, ia, isa.getPort())方法:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
//sun.nio.ch.Net#connect
static int connect(FileDescriptor fd, InetAddress remote, int remotePort)
throws IOException
{
return connect(UNSPEC, fd, remote, remotePort);
}
//sun.nio.ch.Net#connect
static int connect(ProtocolFamily family, FileDescriptor fd, InetAddress remote, int remotePort)
throws IOException
{
boolean preferIPv6 = isIPv6Available() &&
(family != StandardProtocolFamily.INET);
return connect0(preferIPv6, fd, remote, remotePort);
}

该方法最终会调用native方法,具体注释如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
JNIEXPORT jint JNICALL
Java_sun_nio_ch_Net_connect0(JNIEnv *env, jclass clazz, jboolean preferIPv6,
jobject fdo, jobject iao, jint port)
{
SOCKETADDRESS sa;
int sa_len = 0;
int rv;
//地址转换为struct sockaddr格式
if (NET_InetAddressToSockaddr(env, iao, port, &sa, &sa_len, preferIPv6) != 0) {
return IOS_THROWN;
}
//传入fd和sockaddr,与远程服务器建立连接,一般就是TCP三次握手
//如果设置了configureBlocking(false),不会堵塞,否则会堵塞一直到超时或出现异常
rv = connect(fdval(env, fdo), &sa.sa, sa_len);
//0表示连接成功,失败时通过errno获取具体原因
if (rv != 0) {
//非堵塞,连接还未建立(-2)
if (errno == EINPROGRESS) {
return IOS_UNAVAILABLE;
} else if (errno == EINTR) {
//中断(-3)
return IOS_INTERRUPTED;
}
return handleSocketError(env, errno);
}
//连接建立,一般TCP连接连接都需要时间,因此除非是本地网络,
//一般情况下非堵塞模式返回IOS_UNAVAILABLE比较多;
return 1;
}

从上面可以通过注释看到,如果是非堵塞,而且连接也并未立马建立成功,其返回的是-2,也就是连接未建立成功,由之前beginConnect部分源码可知,此时状态为ST_CONNECTIONPENDING,那么,非阻塞条件下,什么时候会变为ST_CONNECTED?有什么方法可以查询状态或者等待连接完成?
那就让我们来关注下sun.nio.ch.SocketChannelImpl#finishConnect

SocketChannelImpl中finishConnect解读

首先,我们回顾下,前面我们涉及了sun.nio.ch.ServerSocketAdaptor的用法,方便我们只有Socket编程习惯人群使用,这里,我们也就可以看到基本的核心实现逻辑,那么有ServerSocketAdaptor就有SocketAdaptor,这里,在BIO的Socket编程中最后也是调用了connect(address)操作:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
//java.net.Socket#Socket
private Socket(SocketAddress address, SocketAddress localAddr,
boolean stream) throws IOException {
setImpl();

// backward compatibility
if (address == null)
throw new NullPointerException();

try {
createImpl(stream);
if (localAddr != null)
bind(localAddr);
connect(address);
} catch (IOException | IllegalArgumentException | SecurityException e) {
try {
close();
} catch (IOException ce) {
e.addSuppressed(ce);
}
throw e;
}
}

这里,我们可以调用java.nio.channels.SocketChannel#open(),然后调用所得到的SocketChannel对象的socket()方法,就可以得到sun.nio.ch.SocketAdaptor对象实例了。我们来查看SocketAdaptor的connect实现:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
//sun.nio.ch.SocketAdaptor#connect
public void connect(SocketAddress remote) throws IOException {
connect(remote, 0);
}

public void connect(SocketAddress remote, int timeout) throws IOException {
if (remote == null)
throw new IllegalArgumentException("connect: The address can't be null");
if (timeout < 0)
throw new IllegalArgumentException("connect: timeout can't be negative");

synchronized (sc.blockingLock()) {
if (!sc.isBlocking())
throw new IllegalBlockingModeException();

try {
//未设定超时则会一直在此等待直到连接或者出现异常
// no timeout
if (timeout == 0) {
sc.connect(remote);
return;
}
//有超时设定,则会将Socket给设定为非阻塞
// timed connect
sc.configureBlocking(false);
try {
if (sc.connect(remote))
return;
} finally {
try {
sc.configureBlocking(true);
} catch (ClosedChannelException e) { }
}

long timeoutNanos = NANOSECONDS.convert(timeout, MILLISECONDS);
long to = timeout;
for (;;) {
//通过计算超时时间,在允许的时间范围内无限循环来进行连接,
//如果超时,则关闭这个Socket
long startTime = System.nanoTime();
if (sc.pollConnected(to)) {
boolean connected = sc.finishConnect();
//看下文解释
assert connected;
break;
}
timeoutNanos -= System.nanoTime() - startTime;
if (timeoutNanos <= 0) {
try {
sc.close();
} catch (IOException x) { }
throw new SocketTimeoutException();
}
to = MILLISECONDS.convert(timeoutNanos, NANOSECONDS);
}

} catch (Exception x) {
Net.translateException(x, true);
}
}

}

这里先解释下一个小注意点:在Java中,assert关键字是从JAVA SE 1.4 引入的,为了避免和老版本的Java代码中使用了assert关键字导致错误,Java在执行的时候默认是不启动断言检查的(这个时候,所有的断言语句都 将忽略!),如果要开启断言检查,则需要用开关-enableassertions或-ea来开启。
通过上面的源码注释,相信大伙已经知道大致的流程了,那关于sun.nio.ch.SocketChannelImpl#finishConnect到底做了什么,此处,我们来探索一番:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
//sun.nio.ch.SocketChannelImpl#finishConnect
@Override
public boolean finishConnect() throws IOException {
try {
readLock.lock();
try {
writeLock.lock();
try {
// no-op if already connected
if (isConnected())
return true;

boolean blocking = isBlocking();
boolean connected = false;
try {
beginFinishConnect(blocking);
int n = 0;
if (blocking) {
do {
//阻塞情况下,第二个参数传入true
n = checkConnect(fd, true);
} while ((n == 0 || n == IOStatus.INTERRUPTED) && isOpen());
} else {
//非阻塞情况下,第二个参数传入false
n = checkConnect(fd, false);
}
connected = (n > 0);
} finally {
endFinishConnect(blocking, connected);
}
assert (blocking && connected) ^ !blocking;
return connected;
} finally {
writeLock.unlock();
}
} finally {
readLock.unlock();
}
} catch (IOException ioe) {
// connect failed, close the channel
close();
throw SocketExceptions.of(ioe, remoteAddress);
}
}
//sun.nio.ch.SocketChannelImpl#checkConnect
private static native int checkConnect(FileDescriptor fd, boolean block)
throws IOException;

关于beginFinishConnectendFinishConnect和我们之前分析的sun.nio.ch.SocketChannelImpl#beginConnectsun.nio.ch.SocketChannelImpl#endConnect过程差不多,不懂读者可回看。剩下的,就是我们关注的主要核心逻辑checkConnect(fd, true),它也是一个本地方法,涉及到的源码如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
JNIEXPORT jint JNICALL
Java_sun_nio_ch_SocketChannelImpl_checkConnect(JNIEnv *env, jobject this,
jobject fdo, jboolean block)
{
int error = 0;
socklen_t n = sizeof(int);
//获取FileDescriptor中的fd
jint fd = fdval(env, fdo);
int result = 0;
struct pollfd poller;
//文件描述符
poller.fd = fd;
//请求的事件为写事件
poller.events = POLLOUT;
//返回的事件
poller.revents = 0;

//-1表示阻塞,0表示立即返回,不阻塞进程
result = poll(&poller, 1, block ? -1 : 0);
//小于0表示调用失败
if (result < 0) {
if (errno == EINTR) {
return IOS_INTERRUPTED;
} else {
JNU_ThrowIOExceptionWithLastError(env, "poll failed");
return IOS_THROWN;
}
}
//非堵塞时,0表示没有准备好的连接
if (!block && (result == 0))
return IOS_UNAVAILABLE;
//准备好写或出现错误的socket数量>0
if (result > 0) {
errno = 0;
result = getsockopt(fd, SOL_SOCKET, SO_ERROR, &error, &n);
//出错
if (result < 0) {
return handleSocketError(env, errno);
//发生错误,处理错误
} else if (error) {
return handleSocketError(env, error);
} else if ((poller.revents & POLLHUP) != 0) {
return handleSocketError(env, ENOTCONN);
}
//socket已经准备好,可写,即连接已经建立好
// connected
return 1;
}
return 0;
}

具体的过程如源码注释所示,其中是否阻塞我们在本地方法源码中和之前sun.nio.ch.SocketChannelImpl#finishConnect的行为产生对应。另外,从上面的源码看到,底层是通过poll查询socket的状态,从而判断连接是否建立成功;由于在非堵塞模式下,finishConnect方法会立即返回,根据此处sun.nio.ch.SocketAdaptor#connect的处理,其使用循环的方式判断连接是否建立,在我们的nio编程中,这个是不建议的,属于半成品,而是建议注册到Selector,通过ops=OP_CONNECT获取连接完成的SelectionKey,然后调用finishConnect完成连接的建立;
那么finishConnect是否可以不调用呢?答案是否定的,因为只有finishConnect中才会将状态更新为ST_CONNECTED,而在调用readwrite时都会对状态进行判断。

这里,我们算是引出了我们即将要涉及的SelectorSelectionKey,我们会在下一篇中进行详细讲解。

您的支持将鼓励我继续创作!